일반뉴스 올거나이즈, 전용 LLM 리더보드 앞세워 금융 AI 기술력 주도

금융 용어 및 약어 이해하고, 복잡한 추론에 특화한 한국어 LLM 성능 평가해 올거나이즈가 금융 전문 LLM 리더보드를 공개한다고 8일 밝혔다. LLM 리더보드란 인공지능 언어모델의 성능을 측정해 순위를 매기며 평가하는 플랫폼이다. 누구나 자신이 개발한 LLM 모델을 등록하고, 다른 모델과 경쟁한다. 올거나이즈의 금융 전문 LLM 리더보드는 금융 용어와 약어를 이해하고, 복잡한 추론에 특화한 한국어 LLM의 성능을 평가한다. 일반적인 LLM은 범용적인 사용이 편리하지만, 금융에 필요한 수식 계산과 예외 조건 등을 포함한 복잡한 추론에 특화해 있지 않다. 금융 문서 특성상 수치와 트렌드가 강조된 표와 차트를 이해하는 것도 약하다. 금융 문서와 업무 스타일에 적합한 금융 전문 LLM들을 실무자들이 바로 비교해볼 수 있도록 금융 전문 LLM 리더보드를 제작하게 됐다. 올거나이즈는 또한 금융기관이 금융 특화 LLM 모델의 성능을 비교 평가하도록 자체 제작 테스트 데이터셋도 모두 공개했다. 현재 오픈AI의 GPT-4, 클로드-3, 젬마 등 일반 LLM과 금융 특화 LLM의 13개 모델이 경쟁하고 있다. 이 중 3개는 올거나이즈가 금융 전문 데이터로 파인튜닝한 자체 모

• 서재창 기자
• 2024-04-08 09:38